Avaliações e Detalhes do Produto QA Wolf

Na era da IA, e na era de tudo estar por trás de um software de tickets [email protected], o QAWolf se destaca para mim. O cuidado, a atenção e os canais de comunicação estabelecidos (muito flexivelmente, também) que a equipe deles exibe é uma das melhores experiências de SaaS que já tive.

Adoro como é fácil trabalhar com eles. E eles nos ajudaram a detectar inúmeras regressões em nosso aplicativo (alguns casos extremos bem complicados que não teríamos detectado se não fosse por eles).

Com a revolução do 'vibe-coding', é bom ter meu aplicativo constantemente testado e não me preocupar com todo esse código quebrando recursos críticos em nosso aplicativo.

É tão fácil integrar, você apenas envia as credenciais para eles e os guia pelo seu aplicativo e eles reúnem o contexto por conta própria e aprendem sobre seu aplicativo com você. É fenomenal. Análise coletada por e hospedada no G2.com.

Sinceramente, nada. Acho que a equipe e o produto são incríveis. Análise coletada por e hospedada no G2.com.

Eu realmente gosto de usar o QA Wolf porque eles automatizaram uma grande parte do nosso conjunto de testes do lado do cliente. Eles detectam coisas que geralmente não pensamos, e a equipe é rápida em responder a quaisquer perguntas que possamos ter.

Na verdade, fazemos muito desenvolvimento internamente, então o fato de oferecerem webhooks e outras integrações de terceiros para emissão de tickets é ótimo.

Quanto à implementação, esse processo foi realmente simples. Tudo o que tivemos que fazer foi enviar a eles os testes que geralmente fazemos em um ciclo de construção, dar a eles uma conta em nosso ambiente de Desenvolvimento, e estávamos a caminho. Eu sei que o conjunto de testes está rodando diariamente, e eu posso até entrar e executar fluxos manualmente. Análise coletada por e hospedada no G2.com.

A coisa menos útil sobre o QA Wolf é, às vezes, a associação incorreta de fluxos com relatórios de bugs. Isso cria cenários onde os bugs são considerados "abertos" quando o bug raiz foi resolvido. Análise coletada por e hospedada no G2.com.

Com muito pouca orientação, até mesmo um vídeo gravado de uma demonstração de funcionalidade, eles conseguem produzir testes totalmente funcionais, permitindo que minha equipe se concentre em seu trabalho diário. O portal online deles e a visibilidade completa dos testes nos permite validar e ver o que está acontecendo com eles. Os pontos de verificação regulares nos permitem focar nos testes mais valiosos a serem abordados em seguida. A equipe deles é sempre prestativa e é um processo muito fácil. Análise coletada por e hospedada no G2.com.

O serviço é mais barato do que contratar uma equipe de QA com certeza, mas é um custo razoável. No entanto, estou totalmente convencido de que você recebe pelo que paga e o custo diminui à medida que você adiciona mais. Análise coletada por e hospedada no G2.com.

Reduz o esforço de teste manual para fluxos de trabalho de UI complexos

Melhora a eficiência e cobertura dos testes

Equipe responsiva e colaborativa

Interface intuitiva com insights detalhados de teste e capacidade de reprodução Análise coletada por e hospedada no G2.com.

A elaboração de relatórios poderia ser aprimorada com um painel mostrando gráficos e insights de tendências históricas. Análise coletada por e hospedada no G2.com.

Testes de ponta a ponta de alta qualidade e fáceis de manter que substituem de forma significativa a regressão manual — não uma automação superficial.

Forte comunicação e uma verdadeira mentalidade de parceria; a equipe se sente como uma extensão da nossa organização de QA/QE.

Clara responsabilidade pela manutenção dos testes, investigação de flakiness e relatórios, o que mantém o sinal confiável e acionável.

Entrega transparente e planejamento realista uma vez que as expectativas foram alinhadas.

Modelo comercial flexível que permite que a cobertura de testes evolua à medida que as prioridades do produto mudam. Análise coletada por e hospedada no G2.com.

As expectativas iniciais em relação à velocidade de criação de testes foram definidas de forma mais agressiva durante o ciclo de vendas do que o que a entrega poderia realisticamente suportar.

A modelagem de ROI exigiu esclarecimento e um alinhamento mais profundo sobre as suposições para ser verdadeiramente significativa para o nosso modelo operacional.

A velocidade dos testes aumenta ao longo do tempo à medida que o conhecimento do domínio é construído, então o valor é mais forte após o período inicial de integração, em vez de imediatamente. Análise coletada por e hospedada no G2.com.

Eles são extremamente comunicativos, e a qualidade dos seus testes é muito alta. Em mais de uma ocasião, eles nos impediram de lançar regressões importantes ao relatar bugs para nós no início do nosso ciclo de vida de desenvolvimento de software. Quando precisamos solicitar informações ou mudanças em nossos testes, eles sempre foram rápidos e fáceis de corresponder. Análise coletada por e hospedada no G2.com.

A única desvantagem real que experimentei é que eles não fazem parte da nossa equipe principal, portanto, não têm acesso às percepções sobre os problemas mais comuns que nossos clientes estão enfrentando. Eles são receptivos a essas informações quando as compartilhamos com eles, mas como terceiros, sempre há mais um passo na cadeia de comunicação. No entanto, isso é apenas parte do modelo de negócios, não um déficit particular da empresa deles. Análise coletada por e hospedada no G2.com.

Usamos o QA Wolf para levar nossa organização de 0 a 60 em termos de testes automatizados de ponta a ponta. Eles criaram uma verdadeira parceria com nossos grupos de produto e engenharia para criar uma solução ideal para nós e nos ajudar a desenvolver aquele "músculo" de testes automatizados que ainda não havíamos formado completamente. Achamos o uso do toque humano (acesso a suporte, engenheiros e facilitadores) revigorante e fundamental para nosso sucesso neste mundo de soluções apenas de IA. Análise coletada por e hospedada no G2.com.

Embora tenhamos tido uma ótima experiência com a QA Wolf, é possível que uma organização que já tenha uma cultura/processos de engenharia de testes automatizados robustos possa não ter tanto uso para seus serviços. Achamos que a expertise deles foi fundamental para construir esses processos e cultura dentro da nossa organização. Análise coletada por e hospedada no G2.com.

QA Wolf toma a iniciativa quando se trata de automatizar fluxos de trabalho, fazendo ótimas perguntas para maximizar a cobertura de testes. O conjunto de testes que eles projetaram é impressionante e detectou muitos bugs antes dos lançamentos de produção. Um ótimo grupo para se trabalhar, pensadores críticos e solucionadores de problemas. Análise coletada por e hospedada no G2.com.

Às vezes, temos diferentes engenheiros trabalhando em nossa plataforma. Há alguns engenheiros que são dedicados ao nosso produto e o conhecem bem. Isso cria falsos positivos quando outros engenheiros estão cobrindo os nossos dedicados. Análise coletada por e hospedada no G2.com.

Três coisas: 1. Eles assumem a responsabilidade pelas tarefas que lhes são atribuídas. Se algo parece ou parece errado, mesmo que não seja algo explicitamente discutido ou delineado, eles dedicarão tempo para entrar em contato e esclarecer que as funcionalidades que estão testando estão funcionando conforme o esperado. 2. Manter-se atualizado sobre os próprios testes e corrigi-los se eles falharem. 3. Podemos assumir a propriedade dos testes que foram escritos se/quando decidirmos nos separar. Análise coletada por e hospedada no G2.com.

O que é considerado um "teste" que é cobrado é menor do que eu normalmente intuiria. Isso é algo que eu esperava ao entrar neste serviço. E, em última análise, entendo a abordagem do ponto de vista deles. No entanto, ocasionalmente fico surpreso quando proponho algo como três ou quatro testes. Mas então eles voltam e dizem: "Não, precisamos dividir isso em dez testes". Análise coletada por e hospedada no G2.com.

QA Wolf constrói, executa e mantém testes de integração incríveis, exatamente de acordo com nossas especificações. O conjunto de testes está integrado ao nosso CI e é executado antes de cada implantação em produção. Eles detectaram muitos bugs antes de implantarmos o código para os clientes, e no caso de falsos positivos ou mudanças no produto, são super úteis e rápidos para corrigir e reexecutar seus testes. Análise coletada por e hospedada no G2.com.

Eu realmente tenho que cavar fundo para encontrar qualquer desvantagem. A interface deles é um pouco confusa às vezes, o tempo de resposta para novos testes às vezes demora um pouco, e eles não trabalham nos fins de semana. Nenhuma dessas coisas foi mais do que pequenos aborrecimentos. Análise coletada por e hospedada no G2.com.